工具跟细节之类的就不写了,具体参考我的前一篇文章,这篇直接上代码吧~
戳这里:Python爬取应用宝
这次的代码:
import scrapy
class AnruanSpider(scrapy.Spider):
name = 'Y_Spider'
#首页
def start_requests(self):
urls = ['http://soft.anruan.com/']
for url in urls:
yield scrapy.Request(url=url,callback=self.p